Năm 1856, Nakamura Michitarō khuyên bảo Kusaka tới Kyushu du học. Ông dành thời gian đi khắp Kyushu thăm thú danh lam thắng cảnh và trò chuyện với những văn nhân nổi tiếng trong vùng, và viết thơ sau này xuất hiện trong thi tập Giretsu Kaiten Hyakushu vào thời Minh Trị.[5] Trong khi đến thăm Kumamoto, một samurai Miyabe Teizō (ja) đã cực lực khuyến khích Kusaka theo học Yoshida Shōin,[6] là bạn bè quen biết một thời gian. Khi trở về Hagi, ông đã viết thư gởi Shōin, và với sự giúp đỡ từ một người bạn của Shōin tên Tsuchiya Shōkai (ja), xin được vào học chỗ thầy.[7] Trong bức thư gửi Shōin, Kusaka nhận xét: "Vào thời điểm xảy ra trận Kōan, nên chém hết đám sứ thần nước ngoài, trong trường hợp đó người Mỹ chắc chắn sẽ tấn công. Khi họ làm điều đó có thể sẽ tạo cơ hội khơi dậy kỷ luật lỏng lẻo của các samurai thành một lực lượng bảo vệ quốc gia mạnh mẽ."[lower-alpha 1][8] Shōin gửi lại lá thư với lời lên án ở phần lề: "Lập luận của cậu là phù phiếm và phán đoán nông cạn; nó không xuất phát từ sự chân thành. Ta ghét kiểu viết lách và kiểu người như thế này. Đã quá muộn để giảm bớt sứ thần nước Mỹ. Sử dụng những cách thức cũ kỹ lỗi thời để giải quyết vấn đề ở một thế giới hiện đại thay đổi hoàn toàn chứng tỏ sự phán xét nông cạn. Cậu nên xây dựng lòng chân thành của mình hơn là lãng phí thời gian với những suy đoán tẻ nhạt như vậy. Những lời nhận xét vốn chẳng dựa vào thực tế không có mục đích gì cả."[lower-alpha 2][9]